Sprachgesteuerte AR-Brille Sprachgesteuerte AR-Brille
Sprachgesteuerte AR-Brille Sprachgesteuerte AR-Brille
Sprachgesteuerte AR-Brille Sprachgesteuerte AR-Brille
Sprachgesteuerte AR-Brille
Sprachgesteuerte AR-Brille
Sprachgesteuerte AR-Brille
Detailbeschreibung

Die Firma nxtBase bietet auf der Hardwarebasis "Realwear HMT-1" eine "Out of the Box"-Umgebung namens nxtQ für einen AR-Brillen-Arbeitsplatz an. Die gesamte nötige Technik befindet sich in einer tragbaren Basiseinheit und einer AR-Brille. Über die Basiseinheit werden Arbeitsszenarien bearbeitet und analysiert. Es kann auch eine audiovisuelle Fernkommunikation zur Brille aufgebaut werden.

Nachdem einmal die Daten zu einem Gerät von der Basiseinheit geladen wurden, kann die Brille autark eingesetzt werden, um sich danach wieder mit der Basiseinheit abzugleichen.

Vorteile der Lösung

Im Gegensatz zu anderen transportablen Wissenspeichern hat der Nutzer hier stets beide Hände frei und kann daher auch komplexere Tätigkeiten vornehmen. Die Steuerung erfolgt über Spracheingabe, Bewegungen des Kopfes und visuellen Input, was zum Beispiel QR-Codes sein können. Dazu kann die Brille Daten der Umwelt über das Mikrofon, die Lage- und Kamerasensoren aufnehmen und auswerten, wie zum Beispiel Motorengeräusche oder Fotos eines Defekts.

Auch in Situationen in denen zum Bespiel gerade mit beiden Händen an einer Maschine gearbeitet wird, kann über Spracheingabe die Kamera aktiviert, diese mit Kopfbewegung auf das Motiv ausgerichtet und per Sprachbefehl ein Video oder Foto angefertigt werden.

Genutzte Technologien/ Demonstrationsszenarien

Mit diesem Demonstrator wird mit dem nxtQ-Systems gezeigt, wie eine Maschine von der Brille anhand eines QR-Codes erkannt und der Nutzer interaktiv angeleitet wird, wie er die Maschine startet. Durch die Sprachsteuerung und die direkt ins Sichtfeld eingeblendeten visuellen Informationen hat der Nutzer dabei stets beide Hände zur Verfügung und kann sich zur Erläuterung zusätzliche Bilder einblenden lassen.

Wenn sich diese Informationen nicht bereits auf der Brille befinden, werden diese per Funk von der Basiseinheit bezogen. Über die Basis kann auch eine Fernunterstützung mit audiovisueller Übertragung gegeben werden.

Einsatzgebiete/ Branchen

  • Fernunterstützung durch Experten
    • Über audiovisuelle Verbindungen kann ein Außenmitarbeiter Kontakt zu einem entfernten Experten aufnehmen und durch diesen unterstützt werden.
  • Digitale Arbeitsabläufe
    • Bedienungsfehler können minimiert werden, indem jederzeit auf eine Wissensbasis zurückgegriffen werden kann, wie zum Beispiel Einzelschrittanleitungen oder Checklisten, ohne dabei die Hände für das bedienen eines Mediums einsetzen zu müssen. Auch kann bei Bedarf auf die kompletten Anleitungsbücher zurückgegriffen werden, wenn speziellere Fragen auftauchen.
  • Visuelle digitale Unterstützung
    • Freihändige Verifikation von Geräten oder Waren wird über die HD-Kamera ermöglicht. Diese kann auch zu Dokumentation von Arbeitsabläufen oder der Aufnahme von Fehlerfällen genutzt werden, oft auch an Positionen, die mit einem Tablet oder Ähnlichem nur sehr schwer erreichbar wären.
  • Echtzeit Datenanbindung
    • Es können in Echtzeit externe Daten direkt in das Sichtfeld eingeblendet werden. So können zum Beispiel Justierungen an schwer zugänglichen Stellen vorgenommen werden, ohne ständig an die Bedienkonsole zu wechseln und die daraus resultierenden Leistungswerte abzulesen.